Little Coxwell est un village et une paroisse civile de l'Oxfordshire, en Angleterre. Il se trouve à 1,5 milles au sud de Faringdon et à 0,8 milles à l'est de Great Coxwell. On y dénombre 132 habitants en 2001.